Trong suốt sự tồn tại của họ, lãnh thổ sinh sống của người Briton gồm có nhiều khu vực luôn thay đổi nằm dưới quyền kiểm soát của các bộ tộc. Phạm vi lãnh thổ của họ trước và trong thời kỳ La Mã vẫn còn mơ hồ, nhưng đa số đều tin rằng bao gồm toàn bộ đảo Anh, xa đến tận miền bắc eo biển Clyde-Forth. Vùng lãnh thổ miền bắc này phần lớn là nơi sinh sống của người Pict; ít bằng chứng trực tiếp về sự tách rời của tiếng Pict, nhưng địa danh và tên cá nhân Pict được ghi lại trong biên niên sử Ireland cho thấy nó có liên quan đến thứ tiếng Cổ Briton; quả thực cái tên Goidelic bằng tiếng Ireland của họ là Cruithne lại có cùng nguồn gốc với Priteni trong tiếng Brython. Một phần vùng lãnh địa của người Pict cuối cùng đã bị hấp thụ vào bên trong vương quốc Dál Riata của người Gael. Đảo Man ban đầu cũng là nơi sinh sống của người Briton nhưng sau cùng nó trở thành lãnh thổ của người Gael.

Năm 43 sau Công nguyên, Đế chế La Mã chính thức khởi binh xâm chiếm Britannia. Các bộ tộc bản xứ ban đầu ra sức chống đối các đạo quân lê dương La Mã, nhưng tới năm 84 người La Mã quyết tâm chinh phục miền nam nước Anh và đã đánh tràn vào vùng mà nay là miền nam Scotland. Năm 122 họ cho củng cố tuyến biên giới phía Bắc bằng dãy tường thành Hadrian kéo dài nguyên cả khu vực mà ngày nay là miền Bắc nước Anh. Năm 142 quân La Mã lại đánh tràn lên phía bắc một lần nữa và bắt đầu xây dựng tường thành Antonine, chạy dọc giữa eo biển Forth-Clyde, nhưng họ rút lui trở lại tường thành Hadrian chỉ sau hai mươi năm. Mặc dù người Briton bản địa phần lớn đều giữ được đất đai của mình đổi lại họ bị lệ thuộc vào các thống đốc La Mã. Đế chế La Mã vẫn giữ được quyền kiểm soát "Britannia" cho đến khi triệt thoái vào khoảng năm 410.

Trong khoảng thời gian quân La Mã rời khỏi đảo, người Anglo-Saxon nói tiếng Germa bắt đầu cuộc di cư đến bờ biển phía Đông của nước Anh, nơi họ thành lập các vương quốc của riêng mình.[10][11] Cuối cùng, ngôn ngữ Brython tại các khu vực này đã được thay thế bằng tiếng Cổ Anh của người Anglo-Saxon. Đồng thời, một số người Briton đã tự thiết lập chỗ dựa của họ ở vùng ngày nay gọi là Brittany. Tại đây, họ dựng lên các vương quốc nhỏ của riêng mình và tiếng Breton được phát triển từ thứ tiếng Celt đậm chất đảo quốc hơn là tiếng Gaul. Họ còn giữ được quyền kiểm soát xứ Cornwall và Tây Bắc nước Anh mà những vương quốc như Dumnonia và Rheged đã tồn tại trong một thời gian. Một thuộc địa xa xôi khác nữa là Britonia được thành lập tại Gallaecia ở phía tây bắc xứ Hispania. Đến cuối thiên niên kỷ 1, người Anglo-Saxon và Gael đã chinh phục hầu hết lãnh địa Briton ở Anh và ngôn ngữ cùng văn hóa của người Briton bản địa phần lớn đều bị hủy bỏ,[12] chỉ còn lại duy nhất ở xứ Wales, Cornwall, vùng miền xứ Cumbria và Đông Galloway.